Cái tên Núi Trường Lệ gắn liền với câu truyện thần thoại. Truyện kể rằng: Tại ngọn núi này xưa kia có một người phụ nữ đã qua đời sau khi sinh con, cậu bé có khuôn mặt khôi ngô tuấn tú, lớn nhanh như thổi, sức khỏe phi thường. Thương mẹ, chú bé nhặt đất đá đắp lên thi hài mẹ để nấm mồ lớn dần thành Núi Trường Lệ. Cậu bé đó trưởng thành trở thành một tràng trai khổng lồ, dũng cảm cùng nhân dân làng chài đánh tan loài quỷ biển, về sau trở thành thần Độc Cước, được nhân dân tôn kính và xây dựng đền thờ để tỏ lòng biết ơn.